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Обо мне 


Константин Аксёнов 


Руководитель разработки 
Рескпочзе Кибегпе{е$ Р!аФоггп 


Чем занимаюсь 


Больше 5 лет засыпаю и просыпаюсь с мыслями о Кибетеез. 


опыт 
С 201 занимаюсь разработкой. 
С 2017 работаю в компании «Флант». 


С 2020 руководитель разработки Вескпоизе Кибегтаез Р!аМогит. 


С чем работаю больше всего 


РАМТ 


^ 
Ку Бегпе(е$ "> Рескпоузе 


КоБегпее$ Р!аогт 


Доклад будет интересен тем, кто 


р Использует КиБегпае5 в ргоачсИоп 


Доклад будет интересен тем, кто 


‚В Только присматривается к КиБегпе*е$ 


Доклад будет интересен тем, кто 


(°:) Задумывается над разработкой своего «аналога Ореп5 Ё» 


Доклад будет интересен тем, кто 


© Просто любит Ореп 5очугсе 


«Работать с КиБегпае$ умеет каждый» 


& 


Что вы, вообще, сделали? 
Взяли Кирбегпаез и засунули в него 
разные Ореп $оигсе-компоненты? 


«Работать с КиБегпае$ умеет каждый» 


& 


Что вы, вообще, сделали? 
Взяли Кирбегпаез и засунули в него 
разные Ореп $оигсе-компоненты? 


Кирегпете$ — это не только УАМЕ 
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р 1п2те5$ 


Кибегпее$ — это не только УАМЕ 
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1п2те$$. 


А, 
АПтпку 


КРУГУ Т. РАЗГ РИЧЕЗЬЬО: 9 ЗИФ Зо РОО ОР 


|прте$$ 


СопЯяМар 
а 5егмке 
5есге{ 
СКО Регз5теги\оитеС!айт АНпку ЗЕакеги ее 
Зтаче!и!-приложения 
Гор тапаретепе мк сопёатег$ То!егаНоп$ Везоигсе тй 
ГоадВа!апстя РО патезрасе $ПагтЯ Нага апд 50 емсйоп$ 


Рготе{Не 


Автомасштабирование и балансировка 
ЕмсНоп$ АР! (РОВ) 


00$ (сргоир$, оот_$соге_а9]) НРАЛУРА Базе4 оп сизтот тес$ 


СВО Рег теги \оитеС!айт А НпКу ЗЕатеги!$е! 


Зтачеги!-приложения 


ор тапаретепи мк сопёамтег$ ТоегаНоп$ Везоигсе/тИ 


ГоадВа!апстя РО патезрасе $Пагтя Нага апд 50 емсйоп$ 


Рготе{Не 


Автомасштабирование и балансировка 
ЕмсНоп$ АР! (РОВ) 


00$ (сргоир$, оотп_зсоге_а9]) НРАЛУРА Базе4 оп сизтот тес$ 
Евте5$ вахемау Аррагтог Епзегри!5е-1е\ме! зесиг Ху Роа5есигКуРоЙсу Сизот мае топКогтпр Гог а! КиБегпете$ оБ]ес{$ 
Ореп! Соппес{ упатс Адт155$юп Соп{го! АидК 1052т5 Бупат!с ${огареС!а$$ ргом!5юптя 


паре уайЧа{юоп апд $1214 ${ег-аикозса!ег 


Сем-тапарег 


СВО Рег5\еги/оитеС!айт АпКу З{атеги!5 ее 


Зтачеги!-приложения 


ов тапаретепе шк сопбайтег$ То]ега{оп$ Везоигсе ти 
Гоа9Ва!апстя Р!О патезрасе пап Нага апд 50 емсйоп$ 
Рготе{пе ь 


Автомасштабирование и балансировка 
ЕмсНоп$ АР! (РОВ) 


00$ (сёгоир5, оот_5соге_а4]) НРАЛУРА Ба$е4 оп сизфот тес$ 
Евге5$ ратемау Аррагтог Епсегри5е-!е\ме! зесигКу Ро4$есигКуРойЙсу СизхотмаЫе топКогтя Гог аП КиБегпе{е$ оБ]ес{$ 
Ореп Соппес{ Бупатс Ади 155 юп Соп{го! АидК 1052т5 Бупат!с ${огареС!а$$ ргом!5юпття 


паре уа!Ча{ оп ап@ $121 5{ег-аикозса!ег 


Сем-тапарег Мща хегт Рготе{пеи$ 


Беспростойные обновления 


Оех ОрепРС {Исате гепемга! 
Адуапсед сопиго! р!апе сопйгигайоп 1аС Гог бгагапа (да$ИБоаг4$, дагазоигсе$) Ми{кепапсу КВАС 


Кирбегпее$ ирргаде е{са си${ег птапаретепи Сизтот Кезоигсе$ ма!Ча оп ап@ сопуег$юп 


Гор тапаретепе мк сопбатег$ Тоега{оп$ ВезоигсейтИ 


ТоаЧВа!апст8 Р!О патезрасе $патй Нага апд 50 емсНоп$ 


Рготе{Не 


Автомасштабирование и балансировка 
ЕмсНоп$ АР! (РОВ) 


005 (сргоир$, оот_зсоге_а9]) НРАЛУРА Базе4 оп сизтот тес$ 
Евге$$ вахемау Аррагтог Епсегри5е-1е\е! зесигКу Род$есигКуРойЙсу СизотмаЫе топКог!пя Гог а! КиБегпее$ оБес{$ 
Ореп!0 Соппес{ Бупатес Ади155юп Соп&го! АцдК 105215 Бупат!с ${огареС!а$$ ргом!юпття 


5{ег-аифо$са!ег 


|паре уайЧа# оп ап $121 


согреет Беспростойные обновления ыы 
Оех ОрепРС Шсахте гепемиа! 
АДуапсед сопго! р!апе сопЙзигайоп 1аС Гог бгагапа (да$ПБоаг4$, дагазоигсе$) Ми{(жепапсу КВАС 
Кирбегпе{е$ ирргаде е{са сиз${ег папаретепи Сиз+от Кезоигсе$ ма!Ча оп ап@ сопуег$юоп 
Мопкойпря ипдейутя м#’азугистиге ТеггаРогт-папаре4 т/газ{гисвиге С05{ апа!у$15$ (сои ргом@ег гезоигсе5) 


МегмогК гедие${$ {гас; $у$с 


И 


ГоадВа!апстя Р!О патезрасе $пагтя Нага апд 50 емсЧоп$ 


Рготе{Не 


Автомасштабирование и балансировка 
ЕмсНоп$ АР! (РОВ) 


905 (сртоирз, оот_зсоге_а4]) НРАЛУРА Базе оп сизтотп тен1с$ 
Евге5$ раземау Аррагтог Епсегри5е-[е\уе! 5есиг Ку Род$есигКуРойЙсу СизотмаЫе топКог!тря Гог а! КиБегпее$ оБес{$ 
Ореп! Соппес{ Бупапти!с Ади15$юп Соп{го! АиОК 1025Т5 Бупапус ${огазеС!а$$ рго\!5юпт? 


таре уайЧайоп апд $121 з{ег-аиозса!ег 


и Беспростойные обновления а 
Оех ОрепРС Шсахте гепемиа! 
Адуапсед сопиго! р!апе сопЯгигайоп 1аС Гог бгафапа (За$ИБоага$, датазоигсе$) Ми{Кепапсу ВВАС 
Кибегпе{е$ ирргаде е{са сиз${ег папаретепи Сизтот Кезоигсе$ ма!Чаюоп ап@ сопуег$юп 
Мопкойпря ипдейутя м#’аугистиге ТеггаРогт-папаре4 ш/газ{гисвиге С05{ апа!у$15$ (сои ргом ег гезоигсе5) 
МегмогК гедие$($ {гас} 5у$с 
Сопиго! р!апе тайепап Сеть и отказоусто ЙЧИВОСТЬ отропеп{$ 


СегИЯсахе тапаретепе т К8$ соп(го! р!апе поде-1оса!-Чп$ СВапре$ птопИогтЯ 


Орега{ог$ Сопйригтя КиБесй Гог гето{е ассе$$ № оп-4ез{гисйуе ирЧа{е аррйег 


в. г ‚а: } ЩИ ЧР у м 
ир5, оот_5соге_аа! 1 УРА Ба$еа оп сизтогт теги 


№ ку ы з Е ДГ 9 к. вт Ул ЗИ < к й 
Ерте5$ вакемгау Аррагтог Егцегрие-!еме! зесигКу. Род5есигкуРойсу СизотваЫе топкойпя Гог а! КиБегпехез оеси$ 
Ореп! СоппесЕ Рупапис АЧт15$ЮП Сопёго! АиоК 1055ТЯ Рупатс 5фогареС!а$$ рго\ опт 


> 5{ег-аико5са!ег 


|тпаре уайдаоп ап 5152 


Сем-тапарег Мыща хегт Рготе{Неи$ 


Беспростойные обновления 


Оех ОрепРО Исаке гепемиа! 


Адуапсед сопиго! р!апе сопйгигайоп |1аС Гог бгафапа (Ча$ПБоаг4$, датазоигсе$) Ми{кепапсу ВВАС 
Кирегпе!е$ ирргаде еёсЯ си5{ег тапаретепе Сизот Кезоигсе; маНЧайоп ап@ сопуег$юп 
МопКогтя ипдейутя тгазхгистиге ТеггаРогт-тапазе4 т#газ{гистиге С05{ апа!у$1$ (с1ои@ ргом!Чег гезоигсе5) 
МегмогК гедцие${$ {гасу 5у$с 
Сопиго! р!апе тайепап Сеть и отказоусто ЙЧИВОСТЬ отропеп!з 


СегИЯсахе тапаретепе т К8$ соп(го! р!апе поде-1юса!-4п$ СВапре$ птопИогтЯ 
Орегатог$ Сопйвригтя КиБес{! Гог геток{е ассе$$ М оп-дез{гисйуе ирда{е аррИег 
№де'$ 0$ сопйригайоп 5$ро! т${апсе$ 2\15 ог Сюца ргомег и\цергаюп 


в Т^ ЗУ = "га =. 


-5' -э> $**°$®у ртр ое У 99: УЧ? | АА эм: > © о еы вх Дж д оО ЕЕ, АЯ Ш! - т ви ммс о дний 
Ореп! Соппес{ Бупаптис Адп1$$юп Сопго! АСК 1055Т8 Оупатис ${огареС!а$$ рго\1$юптЯ 


таре уайда оп ап@ $120 ${ег-аикозса!ег 


Сеп-тапавег Беспростойные обновления а отеь 
Оех ОрепРО Шсаке гепемиа! 
Адуапсед согиго! р!апе сопЯгигайоп 1аС Гог бгафапа (да$НБоаг4$, дахазоигсе$) Микепапсу КВАС 
Кирегпе{е$ ирягаде е{са си5{ег папаретепЕ Си${от Кезоигсе$ майдай оп ап@ сопмегзюп 
МопкКогтХ ипдепутя тгазхгисфиге ТеггаРогт-гпапазе4 т#газ{гисфиге С0${ апа!у$1$ (сои ргом ег гезоигсе$) 
МегмогК гедие$1$ {гас 5у5сИ 
Сопиго! р!апе тайепап Сеть и отказоусто ЙЧИВОСТЬ отропеп!$ 


СегИЯсахе тапазетепу т К8$ соп(го! р!апе поде-1оса!-4п$ СПапзе$ птопКогтя 
Орегатог$ Сопйригпя КиБесй Гог гето{е ассе$$ М№оп-4ез{гисйуе ирда{е аррйег 
№ де'$ 0$ сопЯрига Чоп $ро: И1${апсе$ 2\5 ог Сюц9 ргом ег ицергайоп 


Безопасность 


СПао$ {е5{тр/епртеегтя СВ Адуапсе4 зспеди!т8 Меа!В КеераНуе4 


рех Орест соте тепечуа! 


Адуапсед соп(го! р!апе сопЯвигайоп 1аС Гог бгафапа (Ча$ПБоаг4$, Ча{азоигсе$) Микепапсу ВВАС 
Кибегпе{е$ ирргаде еёсд сиз{ег папаретепе Сизтот Везоигсе$ уа!Нда оп ап@ сопуегзюп 
Мопкогтя ипдетутя и"газхгистиге Теггаогт-тапаяе4 тгазгистиге Со5{ апа!уз1$ (сюи@ ргом!Чег гезоигсе5) 
МермогК гедие$1$ {гас 5у5с И 
Сопиго! р!апе тайепап Сеть и отказоусто ИЧИВОСТЬ отропеп{$ 


СегИЯса{е тапаретеп{ т К8$ соп{го! р!апе поде-1юса!-4п$ СПапрез топИогтЯ 
Орегатог$ Сопйригтя КиБес{! Гог геток{е ассе$$ М оп-дез{гисйуе ирда{е аррИег 
№де'$ 0$ сопйригайоп 5$ро{ т${апсе$ 2\150г Сюца ргомег и\церга юп 


Безопасность 


СПао$ 1е5тр/епртеегтя СВ Адуапсед зспеди!т8 Меа!.В КеераНуе4 


Рас тр сопиго!-р!апе сотропепт$ КЕР$ Оесйу ицегаси тя мВ егса 


Требования к КиБегпее$-платформе 


® Надежность 

® Небольшая команда эксплуатации 

® Идентичные КиБегпае5$-кластеры в любой инфраструктуре 
® Снижение нагрузки на пользователей платформы — МоОр5 


® Безопасность 


Поэтому мы сделали 
Ресквоц5$е для себя 


Поэтому мы сделали 
РескКпоц5е 


РЕАМТ 


& 
$ю>) Рескпоузе 
3 — КоБетее$ РаФогт 


АррИсаНоп$ 


Кибегпе{е$ 


5есигКу ОБ5егуа Ку 


ишптаз{гисвиге 
а$ а $егусе 
(Сючц9а) 


Аисозсайтя 


Подготавливает 


инфраструктуру или работает поверх Баге-тета! 


7 Ч РЕАМТ 
$ю>) Рескпоузе 
3 — КоБетее$ РаФогт 


АррИсаНоп$ 


Кибегпе{е$ 


5есигКу ОБ5егуа6Йку 


ишптаз{гисвиге 
а$ а $егусе 
(Сючц9а) 


Аисозсайтя 


Разворачивает 
Кибегпще5-кластер 


Подготавливает 


инфраструктуру или работает поверх Баге-тета! 


РЕАМТ 


& 
$ю>) Рескпоузе 
3 — КоБетее$ РаФогт 


АррИсаНоп$ 


Кибегпе{е$ 


Устанавливает 


компоненты в кластер 


ы} 


5есигКу ОБ5егуа6Йку Аисозсайтя 


$ Разворачивает 
Кибегпще5-кластер 


ишптаз{гисвиге 
а$ а $егусе 
(Сючц9а) 


Подготавливает 


инфраструктуру или работает поверх Баге-тета! 


7 Ч РЕАМТ 
$4ю>) Рескпоузе 
3 — КоБетее$ РаФогт 


АррИсаНоп$ 


и а Управляет 
конфигурацией кластера и всех компонентов 


Кибегпе{е$ 


Устанавливает 


компоненты в кластер 


ы} 


5есигКу ОБ5егуа6Йку Аисозсайтя 


Разворачивает 


Кибегпще5-кластер 


шптаз{гисвиге 
а$ а $егмсе 
(Сюц9а) 


Подготавливает 


инфраструктуру или работает поверх Ваге тета! 


&, 


4 
у 


РЕАМТ 


КоБеге*ез$ Ра огт 


АррИсаНоп$ о ол ооо дес ие оао 
| [=] 
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, , 
. . 
, , 
р р 
О О 
, , 
©... .-..-.-...-.-. Согаштег$ + -=-=---=-----=---# 
Кибегпее$ 
О НЫ ББ ЬЬЬЫЫЫ БББЫНЫ 
О О 
О О 
О О 
] О О 
О О 
О О 
кара - ВЕдУГеОаЧопе +2259 
О О 
: бя 
‚ В 8 8 Ш 8 
кеенннннн----. ОШПегх +------------4 
шйазгисвиге 
а$ а $егмсе 


(Сючц9) 


< чз 


2 патезр: 


Рготе{пеиз 


Неаивсвескз 
; 
ЕМсНоп5 АР! (РОВ) 


Евгез вапемау 'Аррагтог епбегризе4еуе! зесигКу Рочесииуройсу — Сизхопигаые топкония Гог а КиБегпекез обес 


Ореп!Ю Соппесе рупат Адт!5зюп Сопего! АиЧн ЮБЕтЕ рупапие 5когаве(!аз$ ргомзюпия: 


паре уаНаоп ап4 заптт8 Везоигсе знайпя зессотр. МецмогКРОНсу сизсег-ацгозсаег 


Сем-тапарег Миыачип8 апд Ат юп меБНоок$ 1пге5$ попКойпя Чезснпедшег Топриегт Рготегпеиз 


рех — ОрепроНсудвепе Рготевеиз диегу сасвп8 1пёгез$ ашлозсайи8 СегеИсаке гепема! 
Адмапсе4 сопиго! р1апе сопйзиганоп ас Гог бгагапа (ЧазПБоага, Чаказоигсез) МиКепапсу ВВАС 


Кибегпекез ирагаче еёсд с1изсег тападетепе Сизкот Везоигсез уайдаНоп ап4 сопуегзюп 


Мопнойпв ипденупя птазгискиге Теггагогт-тапавеч птазиискиге Со5Е апа!уз15 ((юи9 ргомег гезоигсез) 


МевмогК гедиез($ {гастя СМ (СШит, Сайсо, Паппе!, тиезгаНоп ми В сид ргомег УРС$) зузсН 


7 Ч РЕАМТ 
$4ю>) Рескпоузе 
3 — КоБетее$ РаФогт 


АррИсаНоп$ соевое совосекекаасхе 
р 


Продукт с историей 


29 сентября207 @Ф Первый коммит 


Егкегри!5е ЕЧюоп (ЕЁ) ® июль2оло 


28июля20 @ СогптипКу ЕЧ\юпт (СЕ) 


Команда 


Ргодчис* 
Мапачдег 


Теср 
Ееаа/АгсНКес+ 


Епатеегтоа 
Мападег 


2} 
Ваеазе 
Епатеег 


Ассочцпт 
Мападег 


ее 


Теагп!еаа Теапл!еаа 
ГЕ 1 х.1 
Ремеюрег$ Ремеюрег$ 
Реу Теат 
Теапп!еаа Теап!еаа 
Е. 1 А 
Ремеюрег$ Ремеюорег$з 
Реу Теат 


ь 
ь 
ь 


зао 


ооо 
сео 


НапЕ РеуОрз$ Епатеег$ 


ь 


СогпгпипКу 


Жизненный цикл 


Планирование: источники задач 


® РгодисЕ ом/пег 


® Сформирован гоаагпар до 2025 года 


042022 @ Виртуализация 
912023 @ \Меь 


032022 @ Мападеч РакаБазе$ 


Планирование: источники задач 


® Команда Бесквои$е 
® Фиксы багов, работа над стабильностью 


® С! и тесты 
® Технический долг (переписали с Вай на Со) 


е Обновления Кирегпе\е$ и компонентов 


Планирование: источники задач 


© Пользователи Мападеа К8$ и Ежегризе-версии 
® Баги 
® Новая функциональность 


® Улучшения документации 


3 № 3 
3 № 33 
33 9 33 


Ре\уОр$ Епатеег 


Планирование: источники задач 


® СотгппипКу-пользователи и большие запросы 


® Поддержка всех возможных провайдеров 


® Поддержка всех возможных ОС 


О О 5ореп хх 0сзед АШВОГг Табе! > 


О О огаае Сюица Зирром! `агеалаоца-ргомаег ФЕТ 
#28 орепед оп З\! 31, 2021 Бу 721р-деу 


1) ‘уремеашге-гедиеи 


О © Неймпег Сюца Зирром! `агеаллоиа-ргомаег ФЕТ 
#23 орепед оп 24 29, 2021 Бу 7ар-вем 


О © смо аюица ргомаег зиррой! `агеалзоца-ромаег ФЕД 
#21 орепед оп 3 29, 2021 Бу 5а!уат1814 


О_О Иптоде аюца ргом@ег зирром! `агеакюиа-ргомвег ФИ 
#15 орепед оп 3 28, 2021 Бу итс#из 


Баскод 


О О $саемау сюча ргом ег зиррог" `агеа/оюио-ргомаег ФЕТ 
#14 орепед оп м 28, 2021 Бу тс#и5 


Ргоес< 


Мйез1опез * 


Аззюпее * 


$оп * 


СопптипкКу 


Планирование: сортировка задач 


® Периодичность 


® Один раз в неделю 


© Обработка 
® Источник 
® ТИП 
® Раздел Рескпои$е 


® Приоритет 


Планирование: релиз 


© Минорные релизы 


® Один раз в две недели 


® Патч релизы 


® По мере необходимости 


Планирование: ге!еазе ПЙо\м/ 


Теафиге_2 @-——® 
Теакиге_1 | ии | | 


ге1еазе-1.35 


ге1еазе-1.36 


ею 


ге1еазе-1.37 


е— о 


Планирование: ге!еазе ПЙо\м/ 


БидЕ1х_1 @— 
Теафиге_2 @-——® 
Теафиге_1 и ии | | 


ге1еазе-1.35 


ге1еазе-1.36 


ео 


ге1еазе-1.37 


ее — о 


Планирование: ге!еазе ПЙо\м/ 


БидЕ1х_1 @— 
Теафиге_2 @-——® 
Теафиге_1 и ии | | 


| | 


ма1п 


ге1еазе-1.35 


ге1еазе-1.36 


ге1еазе-1.37 


=. 


Разработка: СКНчЬ 


® Переезжали из $%апаа!опе СКЁаЬ 
® Настрадались от СИНиЬ Ас|оп$ 


© Но СИНаЬ по-прежнему остаётся самым популярным 


бИНиь 


Заск 


„Лга 


боове биНе (Восз, Меет, ес. 


баь 


Сопйиепсе 


Тео 


Мусгозой Теагп5 


| 


М!сго5 гиге 


= 
| 


Заск Оме ом Гог Теа 


а 

а 
[4 
= 


Расебоок \Могкр!асе 


Разработка: Ореп $оигсе 


® Публичные 155че и спапдеод — доверие и уверенность 


® Открытые исходники — прозрачность 


© ОесКпоизе гоадтар 


> 


СЫ 


|. 


Г: 


{8 гоадтар Бу диапегз > + №ммем 


тие . 


2022 04 1з 


АззКпеез 


© [аг90сЧ] Мем тодие #313 @ поп 


|-> [ора] Род 5еситу З{апдаг4$ #2425 

(© Мипиайгайоп] МогКЙом - рвазе 1 02 #602 

© [Ческпоизе] Вееазе ргосез$ ройз№пд #1941 

О ЕЗЕ1е5$ ипргометет$ #1628 

О Р'томае тзиисйопз оп ом то за!е!у пиогае могкоадз {тот {Пе доскег о согиатега СВ #1420 
О со поок$ ипргометет5 #804 

11 [Фескпоизе-сопйд] пеми тодше: изе ОесКпоизеСопйд сизот гезоигсе ог сопйдигайоп #1729 
© [Чезспедшей Ройсез ог поде дгоирз #1382 

© [дейпд-мапед] зе пр.ю ШКе зегмсе 1ог пе "бешпа Запед" пзииспопз #630 

1: Мииайгайоп] Меми тодше #1357 

| [поде-тападе!] Ирдае ашозсаег #2735 


О АЧЧ ашотаед репофс му ез5. #2679 


> Узозеу 


® Кар 


8) дают, пате?12... 


«Х. гроюуом, пате2 
& лау-эп 

@ паьокитз 

$3 чаюш 

©) 2122аз 

4:25 

© Куарз 

4 Уазеу 


$ отаюгом 


аш 


1п Ргодгез$ 
Ропе 

1п Ргодгез$ 
1п Ргодге5$ 
1п Ргодгез$ 
1п Ргодгез$ 
1п Ргодге5$ 
1п Ргодгез$ 
1п Ргодгез$ 
10 Ргодгез$ 
1п Ргодгез$ 
Оопе 


10 Ргодгезз 


Оцапег 


2022 04 
2022 04 
2022 04 
2022 04 
2022 04 
2022 04 
2022 04 
2022 94 
2022 04 
2022 04 
2022 04 
2022 04 


2022 04 


миезопе 


\1.38.0 


У1.41.0 


\1.39.0 


таре 


аоаоса оиОВИИНВИВАЕЕЕВИ ‘уреиоапитечгедиев 
Г 
помои ролеты 

оакою нц ФОБИИ ФЕНЕНИЕН ЕТО 
‘агеасиз!ег-апа-пиазиисииге — агеалих зуренеаш 
нонон СОЕД авивоные 


воопшестсотаиега) “едвлизейкаал.21) 
агеакотриапсе  агеакоге  агеавесшиу  агеалезипд ФЛЕШЕ) (301 


Разработка: идеология РесККоизе 


® Минимум «крутилок» 


Разработка: идеология РесККоизе 


© Собственные интерфейсы, чтобы скрыть реализацию 


Разработка: идеология РесККоизе 


® МоОр$ — безболезненные обновления платформы 


Разработка: идеология РесККоизе 


® Сохраняем «ванильность» К8$, никаких форков 


Разработка: 


Топ-1 в России 


Входим в топ-150 в мире 


в Согптипйу $79 апа НеаК... / Сотратщез {аЫе «$ 


Га$1 5 уеагз * 1 ‚  СопиБиоп$ у 


Кибегее$ Сотрапез з{а!зНсз (Соп!Бийопз, Вапде: [аз{ 5 уеагз), Б0{$ ехсиЧед 


Немей РаскКага Ещжегризе Беуеюртеп! [Р 
Н1ау9 Веру 

МИрго ИтйИеч 

Миапсе Соттипсачопз$ пс. 
Вееа 

СоБапЕ С 

Мнизтеат 

РЕАМТ ЕУВОРЕ 00 

АТ&Т Зегмсез пс. 

Зресиго С1оца пс. 

М ем Кейс пс. 


Гоадзтам 


+ 
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Разработка: наш вклад в Ореп $оигсе 


солкатег г СШит (е„Аех @ ИМЕ ТОВ 


Р тат *х  Ческпочзе / подшез / 101-сеп-тападег / (тадез / сей-тападег-согиго|ег / расвез / 


®> уаюзем Ях есге{ омлег ге! (#1985) ... 


[ РЕАОМЕ.та [сеп-тападе!] АддеЧ омипег ге! сеййса!е рагатеег (#1601) 


[9] сеийсае_омтег геграсй Ях зесге! омилег ге! (#1985) 
:= КВЕАОМЕ.т@ 
РасПез 


Сецса{е омтег ге! 


@® киувеме ЭСгаюпа 


бою Яе АЧФ Не > 


У 105865т оплм8 ® Ногу 


6 топ!$ адо 


4 топ $ адо 


р 


АЧ$ СегЕ1Р1саЕе0мпегВвег Йад {о Сеййсае СРО. сегЕ1Р1саебмпегВег Йад 15 мпе!ег ‘о зе {Пе сейсае гезоигсе аз ап омлпег ога 
зесге{ мтеге пе Т$ сепййсаге 15 5югед. \МПеп {15 Йад 15 епаЫеч, ше есге{ мл! Бе ашотайса!у гетоуед мтеп {пе сеййсаге гезоигсе 15 


Че!в{е4. сеп-тападег/сей-тападег#5158 


Разработка: наш вклад в Ореп $оигсе 


солватег Г сит $ ех © СМ5ТОВ — © киьеми 


® Все патчи должны быть донесены в ир$геагп 


® Если изменения приняли в ир&геагип — это гарантия, что они будут работать 
® Влияем на развитие важных для нас компонентов 


® Дополнительная оценка наших изменений 


{ЭСгаапа 


Разработка: наш вклад в Ореп $оигсе 


солватег Г В сит (е›Аех © СМ5ТОВ — © киьеми 


® Все патчи должны быть донесены в ир$геагп 
® Если изменения приняли в ир&геагип — это гарантия, что они будут работать 
® Влияем на развитие важных для нас компонентов 
® Дополнительная оценка наших изменений 


® Наш пример с соптатега 


{ЭСгаапа 


Тестирование 


® Модульные тесты Нет, ПооК’ов, ОрепАР! 

® Модульные матричные тесты 

© Е2Е-тесты для каждого провайдера и конфигурации 
© Е2Е-тесты обновления минорной версии Бескпоизе 


® Линтеры кода, линтеры шаблонов, Валидаторы и прочее 


Тестирование: множество провайдеров 


® Облачные платформы 
а 
5 бАбЗоФа 


© Другие варианты 


© ме 


Тестирование: разные схемы размещения 


® Стандарт © Без МАТ © В уже существующей сети 


р | 
поде поде поде | 8. ы И т 


| 
1 ь } Е 
=. | оад Вайапсег к к | $ 


} й и 1сад Вавпсег 
| Е. ; 7 — 
| паз!ег 1пегпа! Мемогк } | } ЕЕЕНЕ В 
| ЕЕ | | --.___( мметайМемогк } 
| р $ } 
| 8. : =. 
' т ЕВ | . 5 
а | — ЕН | 8: ``. «> 
3 | — а оаиемау 
Е | р (>) заемау Я (© 
1 Р. о 
5 ЕЖега! Мемок ЛХ 
8 ош 
—_(_ Еметаймемогк з - 
Е : 
ы а 


Тестирование: множество вариантов ОС и версий КиБегпе{е$ 


® РЕД ОС ® Сето5$ 
® Версии: 71 ® Версии: 7, 8, 9 
® АКегО$ е БеБап 
® Версии: 7 ® Версии: 9, 10, 11 
© Ага Мпих 5реса! ЕЧ оп © ОБипи 
® Версии: 1.7 ® Версии: 16.04, 18.04, 20.04, 22.04 


© Кобегпее$ 


® Версии: 1.20, 1.21, 1.22, 1.23, 1.24 


Тестирование: множество вариантов всего 


® Поддержка 2-х СН!: Роскег и сопатега 
® Поддержка 2-х СМ!: Наппе! и СШит 


® Несколько десятков модулей 


Тестирование: множество вариантов всего 


® Поддержка 2-х СР!: оскег и соп{атега 
® Поддержка 2-х СМ!: Наппе! и СШит 


® Несколько десятков модулей 


Разработка и тестирование: важные моменты 


® Публичная разработка дала нам только плюсы 
© Следует приносить изменения во все используемые Ореп $5оигсе-проекты 
® У продукта должна быть идеология и правила 


® Тесты — это хорошо, но всё протестировать невозможно 


Разработка и тестирование: важные моменты 


И какже мы решили проблему с тестами? 


Разработка и тестирование: важные моменты 


И какже мы решили проблему с тестами? 


Нужен правильно 
выстроенный 
релизный процесс! 


Релиз: уверенность 


ты Каналы обновлений 


Релиз: уверенность 


ты Каналы обновлений 


А!рВа 


Вета 


Еайу Ассе$$ 


ЗфаЫе 


Воск 5ойа 


Менее стабильные 


Более стабильные 


Релиз: уверенность 


Очередность выката 


АЁЕРНА 


ВЕТА 


ЕАКГУ 
АССЕ$5 


ЗТАВЕЕ 


КОСК 
$0 


ЕЕ 


ЕЕ 


СЕ 


1.40.0 


№у 11, 10:06 
ос - Спапде\од 


1.39.2 


№у 1, 09:05 
0ос - СРапде\од 


1.39.2 


№у 1, 09:05 
0ос - СВапде\о9 


1.39.2 


№у 1, 12:07 
ос . СПапде\1о9 


Ехрес{ 1.40 оп 
№у\ 14 (Моп) 


1562522 


№у 1, 12:07 
0ос . СВапде\1о9 


1.39.2 


№у\ 1, 12:07 
ос - СВапде\о9 


1.39.2 


№\ 2, 13:02 
0ос + Спапде\од 


Ехрес{ 1.40 оп 
№у\ 16 (мед) 


1.39.2 


№у 2, 13:02 
0ос + СРапде\од 


1.39.2 


№\у 2, 13:02 
0ос - Спапде\од 


1.39.2 


№у 8, 13:02 
ос - СВапде\о9 


Ехрес{ 1.40 оп 
№у\ 22 (Тие) 


1.39.2 


№у 8, 13:02 
ос . СВапде\о9 


1.39.2 


№у 8, 13:02 
ос - Спапде\о9 


Ном, Ааесквочц$е.!о 


1.38.5 


№у 7, 11:42 
ос . СВапде\1о9 


Ехрес* 1.39 оп 
№у\ 21 (Моп) 


1.38.5 


№ 7, 11:42 
ос . СВапде\1од 


Ехресе 1.39 оп 
№\ 21 (Моп) 


1.38.5 


№у\ 7, 11:42 
ос . СПапде\о9 


Ехрес* 1.39 оп 
№у\ 21 (Моп) 


Релиз: уверенность 


Очередность выката 


АЁЕРНА 


ВЕТА 


ЕАВГУ 
АССЕ$$ 


ЗТАВЕЕ 


КОСК 
501, 


ЕЕ 


ЕЕ 


СЕ 


1.40.1 


№у 11, 16:59 
Бос - СВапде\од 


1.40.1 


№у 11, 16:59 
Бос - СВапде\о9 


1.40.1 


№у\ 11, 16:59 
ос - СВапде\о9 


1.39.2 


№У 1, 12:07 
Оос - СПапде\1од 


Ехрес{ 1.40 оп 
№у\ 14 (Моп) 


1.39.2 


№\ 1, 12:07 
ос . СВапде\1о9 


Ехрес{ 1.40 оп 
№у\ 14 (Моп) 


1.39.2 


№\ 1, 12:07 
ос . СВапде\од 


Ехрес* 1.40 оп 
№у\ 14 (Моп) 


1.39.2 


№\у 2, 13:02 
ос - СНапде\о9 


ЕхресЕ 1.40 оп 
№у\ 16 (мед) 


1.39.2 


№ 2, 13:02 
00с - Спапде\од 


ЕхресЕ 1.40 оп 
№\ 16 (мед) 


1.39.2 


№\У 2, 13:02 
00с - Спапде\од 


Ехрес{ 1.40 оп 
№\ 16 (ед) 


1.39.2 


№у 8, 13:02 
ос - СВапде\о9 


Ехрес{ 1.40 оп 
№у\ 22 (Тие) 


1.39.2 


№у 8, 13:02 
ос - СВапде1о9 


Ехрес{ 1.40 оп 
№у\ 22 (Тише) 


1.39.2 


№у 8, 13:02 
Оос - СВапде\о9 


Ехрес* 1.40 оп 
№у\ 22 (Тие) 


Ном, Аесквочц$е.!о 


1.38.5 


№у 7, 11:42 
Оос - СПапде\од 


Ехресе 1.39 оп 
№\ 21 (Моп) 


1.38.5 


№у 7, 11:42 
ос - СВапде\о9 


Ехрес{ 1.39 оп 
№у\ 21 (Моп) 


1.38.5 


№ 7, 11:42 
ос - СПапде\1од 


Ехрес* 1.39 оп 
№у\ 21 (Моп) 


Релиз: уверенность 


Очередность выката 


АЕРНА 


ВЕТА 


ЕАВИУ 
АССЕ$$ 


ЗТАВЕЕ 


КОСК 
$04 


ЕЕ 


ЕЕ 


СЕ 


1.40.2 


№у 15, 14:09 
Оос - СПапде\од 


1.40.2 


№у 15, 14:09 
ос . СВапде1од 


1.40.2 


№у 15, 14:09 
Бос . СВапде\1о9 


1.40.2 


№у 15, 14:43 


ос + 


СПапде\1од 


1.40.2 


№у\ 15, 14:43 


Оос 


СПапде1од 


1.40.2 


№уУ 15, 14:43 


Оос + 


СПапае\оа 


1.40.2 


№у 16, 11:36 
0ос . СНапде\од 


1.39.2 


№у 2, 13:02 
ос . СПапде\о9 


Ехресе 1.40 оп 
№у\ 16 (мед) 


1.39.2 


№у\ 2, 13:02 
0ос . Спапде\од 


Ехресе 1.40 оп 
№у\ 16 (ед) 


1.39.2 


№у 8, 13:02 
ос - СПапде\1од 


Ехрес{ 1.40 оп 
№\ 22 (Тие) 


1.39.2 


№у 8, 13:02 
Оос - СВапде\од 


Ехрес{ 1.40 оп 
№\ 22 (Тие) 


1.39.2 


№у 8, 13:02 
Оос + СПапде\од 


Ехрес{ 1.40 оп 
№\ 22 (Тие) 


Ном, Ааесквочц$е.!о 


1.38.5 


№у 7, 11:42 
ос - СПапде\1од 


ЕхресЕ 1.39 оп 
№\ 21 (Моп) 


1.38.5 


№у 7, 11:42 
ос - СПапде\од 


Ехрес{ 1.39 оп 
№У 21 (Моп) 


1.38.5 


№у 7, 11:42 
ос . СПапде\од 


ЕхресЕ 1.39 оп 
№\ 21 (Моп) 


Релиз: уверенность 


Окна обновлений 


11 


25 


Тие 


4/30/2020, 15:48 


Мау - 2020 › 


Ме Тви Ей За 


20 21 22 23 


27 28 29 30 


45 


24 


31 


Релиз: уверенность 


Г Ручные обновления 


® У\Уочцг БескКПочее 1$ мата 
[о Гог {Пе \1.36.5 ираа{е арргома! 


$ Кибесе1 рафсН дескКВоичзеге\еазе \1-36-5 \ 
--Суре=тегде -р='{"арргомед": 1гие}' 


Релиз: люди 


® Релиз-инженер 
® Оповещение пользователей 
® Отслеживание процесса релиза (телеметрия и логи) 


® Первичная обработка входящих ошибок по проблемам во время обновления 


Релиз: люди 


® Ответственный за релиз 
® Своевременная «заморозка» кодовой базы 
® Проверка спапдеосд’а 
® Проверка Е2Е по обновлению релиза 
® Финальное согласование выката 


® Поддержка релиз-инженера 


Релиз: отслеживание 


® Логи аескпочц$е-соп\го!Йег 


® Аудит-логи с Кире-ар!егуег 


© Телеметрия с информацией о кластере 


Релиз: отслеживание 


© Логи Ческпочзе-сотго|ег 
® Аудит-логи с Кире-ар!егуег 
© Телеметрия с информацией о кластере 


Всё это собирается только с кластеров под нашим управлением 


Релиз: телеметрия 


х ТаМе 
Сизтегз 
ргоес! ^ сизег_пате ристд_с!из1ег 1уре сюид_ргомег ге!еазе_спаппе! сопиго!р!апе_мегзюп подез этайе_сиз{ег э1а{е_тазег з1а{е 4еггаподе 
ргоа Соид узрпеге ЗаЫе 1.21 47 
з1аде Соид узрпеге Арва 1.21 7 
рок С!юид ‘уапдех ЕаПуАссез 1.21 10 
тат Сюиа уапдех ЗаЫе 1.21 7 
тат Нубпа орепзаск ЗаЫе 1.21 31 
адт-ргодисНоп-01-а Зайс попе ВоскЗойа 1.21 23 опе попе 
з4аЫе ЗЧанс попе Коск$ой4 1.21 28 е попе 
у Бейа$ 
Кейеазе Спаппе! Сюиа Ргомдег 
ево сштепи! > 2 ситепи 
и — та 236 || 20 — тов 236 
= ЗаЫе 107 = попе 87 
150 150 
— ЕапуАссезз 74 — узпдех 48 
100 — выа 24 100 — орепчаск 36 
г: — Воскбойа 11 = — аз 34 
— Опкпомп 10 — узрнеге 26 
о о 
05:00 06:00 07:00 08:00 09:00 10:00 — Ара 10 05:00 06:00 07:00 08:00 09:00 10:00 - 5 
Сиз{ег Туре Согиго! Р!апе Мегзюп 
р ситеп! > 250 ситепи 
{ о 
— = Тома! 236 ны — Теа 236 
150 150 
Ея — сю 149 || зюо — 121 218 
50 — Зав 83 50 — 1.23 14 
о о 
05:00 06:00 07:00 08:00 09:00 10:00 ВИН ы 05:00 06:00 07:00 08:00 09:00 10:00 ыы ы 


Релиз: телеметрия 


СЕ!/ оскег 
ны сштепи 
— Теа! 2212 
— 19313 2053 
— 1897 100 
3000 — 19315 51 
— 201014 4 
— 1899 4 
— 204017 2 
и — 20107 1 
— 1893 1 
2000 
1500 
1000 
500 
о 
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Релиз: телеметрия 
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Релиз: процесс обновления 
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Релиз: процесс обновления 
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Релиз: процесс обновления 
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Релиз: процесс обновления 
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Релиз: процесс обновления 
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Релиз: процесс обновления 
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Релиз: интересные случаи 


‚ А Проблема: 


1 
& [Г Сломался механизм обновления ВесКквоицзе сог\го|ег 


В Решение: 


Помогли каналы обновлений и ЕЕ-редакция 
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Релиз: интересные случаи 
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Остановили канареечный релиз на Еапу Ассе$$ 


Старый 
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Прекратили поддержку РоскКег 18.09 


Релиз: интересные случаи 


А Проблема: 


Пользователям пришлось дважды править 
устаревшие АР! в одном репозитории 


В Решение: 


Надо обязательно ставить себя на место пользователя 


Оергеса*еа 
АР! 


Релиз: важные моменты 


® Ретроспектива релиза 


® Главное — делать выводы из ошибок 


® Нельзя катать по ночам :] 


Эксплуатация 


© Большая сервисная история 
© Дежурный инженер, дежурный по установке кластеров 
® Целая команда разработчиков оп-са! для решения клиентских проблем 


® Аещеё есть постоянные демо, пилоты и внедрения 


Эксплуатация: внимание к проблемам на стыке 
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Эксплуатация: сервис 
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Пришел инженер и в Пуе-режиме 
решил проблему. Спасибо, 
вы нас спасли. 


Итоги 


© У продукта должна быть идеология и правила 

® Протестировать всё невозможно, но правильные процессы закрывают проблему 
® Релизы нужно обязательно катать часто, но безопасно и незаметно 

® Клиенты ценят сервис 


® Обязательно нужно проводить ретроспективу и анализировать ошибки 


«Работать с КиБегпае$ умеет каждый» 
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Что вы, вообще, сделали? 
Взяли Кирбегпаез и засунули в него 
разные Ореп $оигсе-компоненты? 


«Работать с КиБегпае$ умеет каждый» 
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Что вы, вообще, сделали? 
Взяли Кирбегпаез и засунули в него 
разные Ореп $оигсе-компоненты? 
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